Vés enrere IDENTIFICACIÓ DE MOTIUS VISUALS I APRENENTATGE COMPARATIU D'IMATGES

IDENTIFICACIÓ DE MOTIUS VISUALS I APRENENTATGE COMPARATIU D'IMATGES

IDENTIFICACIÓ DE MOTIUS VISUALS I APRENENTATGE COMPARATIU D'IMATGES
L'objectiu del projecte, realitzat en col·laboració amb el Departament d'Enginyeries de la UPF, és desenvolupar tecnologies d'IA capaces d'identificar i comparar motius visuals, per tal de millorar els models existents de computer vision i machine... ...

El cinema i la fotografia, l'art i la comunicació creativa inclouen amb freqüència motius visuals. És a dir, composicions i patrons identificables que els creadors d'imatges utilitzen per a expressar coses visualment. L'objectiu d'aquest projecte és aprendre i identificar automàticament aquests motius visuals, millorant la capacitat d'anàlisi d'imatges amb els complexos models comparatius de la iconografia.
El que ofereixen els motius visuals, en comparació amb les tecnologies existents que utilitzen estratègies de visió per ordinador, és una interpretació més matisada i refinada de les imatges, basada no sols en el reconeixement estàndard de dades geomètriques o semàntiques, sinó en les opcions estètiques i ideològiques significatives de creadors anteriors a través de la història de l'art i els mitjans de comunicació. En lloc de basar la tecnologia en la imitació de moviments artístics o autors anteriors (com els enfocaments basats en IA que s'entrenen per a crear una imatge "a l'estil" d'un pintor), els motius visuals serveixen per a contrastar i relacionar múltiples tipus d'imatges i autors, comparativament.
Per això, el nostre primer objectiu és automatitzar el reconeixement de les accions i patrons que es produeixen en una imatge, vídeo o pel·lícula concrets. D'aquesta manera, la tecnologia no sols identificarà quin motiu visual s'està utilitzant, sinó que també traçarà una mostra d'exemples canònics previs (de pintures, pel·lícules i fotografies clau) que quedaran a la disposició dels usuaris per a crear noves imatges amb coneixement de causa.

 

Investigadors principals

Manuel Garin
Gloria Haro
Coloma Ballester

Investigadors

Alan Salvadó
Miriam Sánchez
Adam Philips
Daniel Grandes

 

Aquest projecte està finançat pel segon Programa de Recerca Estratègica Maria de Maeztu (CEX2021-001195-M) del Departament de Tecnologies de la Informació i la Comunicació (DTIC) que tindrà lloc entre el 2023 i el 2026.